台湾专利TW201301866A 可產生廣角影像之影像處理裝置、影像處理方法、及記錄媒體

专利PDF首页>>台湾专利

专利附录

专利说明

权利要求

类似技术

同族专利

引用文献

法律状态

优先权

专利摘要:
本發明之數位相機的CPU係取得複數張全景影像，並對該取得之複數張全景影像彼此進行合成，而產生一張廣角影像。
公开号:TW201301866A
申请号:TW101111973
申请日:2012-04-05
公开日:2013-01-01
发明作者:Kosuke Matsumoto；Naotomo Miyamoto；Masaru Onozawa
申请人:Casio Computer Co Ltd；
IPC主号:H04N5-00

专利说明:
可產生廣角影像之影像處理裝置、影像處理方法、及記錄媒體
本發明係有關於數位相機或具有攝像功能之手機等之影像處理裝置、影像處理方法及記錄媒體。
在數位相機或具有攝像功能之手機等中，攝像像角的界限係與透鏡的焦距、攝像元件的尺寸等、裝置本體所具有的硬體規格相依。而且，針對這種攝像像角之界限的問題，在攝像裝置中，係將廣角拍攝用的變換透鏡等安裝於既有的透鏡前(例如，參照日本特開2004-191897號公報、特開2005-027142號公報、特開2005-057548號公報)，或預先具有複數個透鏡並因應於攝像目的切換透鏡，藉此應付(例如，參照特開2007-081473號公報)。
可是，在該習知技術，為了進行廣角攝像，必須一一安裝廣角攝像用的變換鏡頭，或因應於攝像目的切換透鏡，而在操作性、或費用上具有問題。又，即使使用這些廣角攝像用的變換鏡頭或可切換的透鏡，亦有難以得到攝像者所希望的廣角影像之虞。
因此，本發明之目的在於提供一種不更換透鏡，就可容易且高效率地得到產生廣角影像所需之影像的影像處理裝置、影像處理方法及記錄媒體。
本發明係一種影像處理裝置，其特徵為具有：取得手段，係取得在一方向長的複數張全景影像；及廣角影像產生手段，係在與該一方向正交的方向對藉該取得手段所取得之該複數張全景影像彼此進行合成，而產生一張廣角影像。
以下，參照圖面說明本發明之實施形態。 A.第1實施形態 A-1.第1實施形態的構成
第1圖係表示本發明之第1實施形態的數位相機之構成的方塊圖。在第1圖，數位相機1具有攝像透鏡2、透鏡驅動部3、光圈兼用快門4、CCD5(攝像手段)、TG(Timing Generator)6、單元電路7、影像處理部8(廣角影像產生手段、全景影像產生手段)、CPU11(取得手段、檢測手段、記憶控制手段、比較手段)、DRAM12(記憶手段)、記憶體13、快閃記憶體14、影像顯示部15、鍵輸入部16(指定手段)、卡I/F17及記憶卡18。
攝像透鏡2包含聚焦透鏡、變焦透鏡等，並連接透鏡驅動部3。透鏡驅動部3由驅動馬達、及聚焦馬達驅動器、變焦馬達驅動器所構成，驅動馬達係分別在光軸方向驅動構成攝像透鏡2的聚焦透鏡、變焦透鏡，而聚焦馬達驅動器、變焦馬達驅動器係根據來自CPU11的控制信號驅動聚焦馬達、變焦馬達。
光圈4包含未圖示的驅動電路，驅動電路係根據從CPU11所送來之控制信號使光圈4動作。該光圈4控制從攝像透鏡2所進來之光量。CCD(攝像元件)5將經由攝像透鏡2、光圈4所投影之被拍攝體的光變換成電信號後，作為攝像信號向單元電路7輸出。又，CCD5根據藉TG6所產生之既定頻率的時序信號而被驅動。
單元電路7係由對從CCD5所輸出之攝像信號進行相關雙重取樣並保持的CDS(Correlated Double Sampling)電路、進行該取樣後之攝像信號的自動增益調整的AGC(Autmatic Gain Control)電路、及將該自動增益調整後之類比攝像信號轉換成數位信號的A/D轉換器所構成。CCD5的攝像信號係經由單元電路7作為攝像信號被送至影像處理部8。此外，單元電路7係根據藉TG6所產生之既定頻率的時序信號而被驅動。
影像處理部8係進行從單元電路7所送來之影像資料的影像處理(像素插值處理、Y修正、亮度色差信號的產生、白平衡處理、曝光修正處理等)、影像資料的壓縮、解壓縮(例如，JPEG形式或M-JPEG形式或MPEG形式的壓縮、解壓縮)處理、合成複數張攝像影像的處理等。此外，影像處理部8係根據藉TG6所產生之既定頻率的時序信號而被驅動。
CPU11係控制數位相機1之各部的單晶微電腦。尤其，在本第1實施形態，在使用者移動數位相機1的期間，CPU11係控制以既定週期(時間間隔)連拍複數張影像，再以部分重複(例如使用α混合)的方式持續合成所拍攝之複數張影像，並應產生如同以廣角拍攝之1張合成影像的各部。此外，關於影像合成的細節將後述。
DRAM12作為暫時記憶藉CCD5拍攝後被送至CPU11之影像資料的緩衝記憶體使用，且作為CPU11的工作記憶體使用。記憶體13記錄藉CPU11控制數位相機1之各部所需的程式、及控制各部所需的資料，CPU11根據該程式進行處理。快閃記憶體14或記憶卡18係預先保存藉CCD5所拍攝之影像資料等的記錄媒體。
影像顯示部15包含彩色LCD及其驅動電路，處在攝像待機狀態時，以直通影像顯示藉CCD5所拍攝之被拍攝體，在播放記錄影像時，顯示從快閃記憶體14或記憶卡183讀出並解壓縮後的記錄影像。鍵輸入部16包含快門SW、變焦鍵、模式鍵、設定鍵、十字鍵等複數個操作鍵，並向CPU11輸出因應於使用者之鍵操作的操作信號。記憶卡18係經由數位相機1本體之未圖示的卡槽拆裝自如地安裝於卡I/F17。
第2圖係用以說明一般之攝像模式的示意圖。利用數位相機1以一般之攝像模式拍攝的情況，如第2圖所示，只能以該數位相機1之攝像系統的像角S拍攝。
第3圖係用以說明本第1實施形態之數位相機1之全景攝像模式的示意圖。又，第4圖係用以顯示本第1實施形態的數位相機1在全景攝像模式之數位相機1的動作(依使用者移動方法)的示意圖。
在該模式，使用者係以相對所要的景色使像角之長度方向成為縱向的方式將數位相機1擺成縱向，並在左上端按快門SW(半按→全按)，如第3圖之箭號所示，首先，按快門SW，並在第1方向(水平方向)移動(狀態#1：參照第4圖)，在既定位置在與第1方向正交的第2方向(垂直方向)移動(狀態#2：參照第4圖)，進而，在別的既定位置在第3方向(水平方向)移動(狀態#3：參照第4圖)。在使用者進行該移動之期間，數位相機1以既定時序依序持續拍攝影像。
在數位相機1，從在水平方向移動之狀態#1所拍攝之複數張影像合成第1全景影像，從一樣在水平方向移動之狀態#3所拍攝之複數張影像合成第2全景影像，再將第1全景影像與第2全景影像合成，最後產生所要的廣角影像(第3圖的下側)。此外，因為在垂直方向移動之狀態#2所拍攝的影像不是產生全景攝像所需要的，所以不會被保存。 A-2.第1實施形態的動作
其次，說明上述之第1實施形態的動作。
第5圖係用以說明本第1實施形態之數位相機1之動作的流程圖。首先，CPU11為，快門SW被半按時(步驟S10)，執行AF(自動聚焦)處理(步驟S12)，而快門SW被全按時(步驟S14)，以既定週期(時間間隔)連拍複數張影像(步驟S16)。此外，關於連拍處理的細節將後述。
此時，如第3圖所示，使用者係以相對所要的景色使像角之長度方向成為縱向的方式將數位相機1擺成縱向，並在左上端按快門SW(半按→全按)，如第3圖之箭號所示，首先，將數位相機1移動於水平方向(從左端往右方向)(狀態#1：參照第4圖)，在既定位置移動於垂直方向(下方向)(狀態#2：參照第4圖)，進而，在水平方向(左方向)移動(狀態#3：參照第4圖)。然後，判斷是否連拍已結束，即是否全景攝影已結束(步驟S18)，若連拍未結束，回到步驟S16，繼續連拍處理。
另一方面，在連拍已結束的情況，即，在全景攝影已結束的情況(在步驟S18為是)，從在自左端往右方向移動之狀態#1所拍攝之複數張影像，合成第1全景影像，從在自右端往左方向移動之狀態#3所拍攝之複數張影像，合成第2全景影像，再將第1全景影像與第2全景影像合成，最後產生所要的廣角影像(步驟S20)。關於合成處理的細節，將後述。
第6圖係用以說明本第1實施形態之數位相機1的連拍處理之動作的流程圖。首先，CPU11進行前一張攝像影像與現在之攝像影像的位置對準(步驟S30)，再判斷現在的狀態是否為狀態#1、#2、#3當中任一者(步驟S32)。
然後，在使用者使數位相機1移動於水平方向(從左端往右方向)之狀態#1的情況(步驟S32的狀態#1)，保存該現在之攝像影像，作為全景影像製作用的影像(步驟S34)。接著，判斷是否數位相機1已到達既定位置(在此情況，係在狀態#1之終點位置的右端)(步驟S36)。而且，在未到達既定位置的情況(在步驟S36為否)，在不變更現在之狀態#1下結束該處理，回到第5圖所示的主程序。
以下，迄至數位相機1到達既定位置(在此情況，是在狀態#1之終點位置的右端)以前，重複步驟S34，而持續保存所拍攝之影像，作為全景影像製作用的影像。然後，數位相機1一到達既定位置時(在步驟S36為是)，因為從狀態#1移往狀態#2，所以將現在之狀態變更成狀態#2(步驟S38)。
接著，在使用者使數位相機1移至在垂直方向(下方向)移動之狀態#2(步驟S32的狀態#2)時，不將攝像影像保存為全景影像製作用的影像，並移至步驟S42(步驟S40)，判斷是否數位相機1已到達既定位置(在此情況，係在狀態#2之終點位置的下部右端)(步驟S42)。而且，在未到達既定位置的情況(在步驟S42為否)，不變更現在之狀態#2，並結束該處理，回到第5圖所示的主程序。
以下，迄至數位相機1到達既定位置(在此情況，是在狀態#2之終點位置的下部右端)以前，不保存攝像影像，而仍然維持繼續拍攝，而數位相機1一到達既定位置時(在步驟S42為是)，因為從狀態#2移往狀態#3，所以將現在之狀態變更成狀態#3(步驟S44)。
接著，使用者使數位相機1移至在水平方向(從右下往左方向)移動之狀態#3(步驟S32的狀態#3)時，保存所拍攝之影像，作為全景影像製作用的影像(步驟S46)。然後，判斷是否數位相機1已到達既定位置(在此情況，係在狀態#3之終點位置的左端)(步驟S48)。而且，在未到達既定位置的情況(在步驟S48為否)，不變更現在之狀態#3，並結束該處理，回到第5圖所示的主程序。
以下，迄至數位相機1到達既定位置(在此情況，是在狀態#3之終點位置的左端)以前，重複步驟S46，而持續保存所拍攝之影像，作為全景影像製作用的影像。然後，數位相機1一到達既定位置時(在步驟S48為是)，結束連拍(步驟S50)。
上述之動作的結果，可得到在使用者使數位相機1從左端向右方向移動之狀態#1所拍攝的複數張影像、與在使數位相機1從右端向左方向移動之狀態#3所拍攝的複數張影像。其次，說明使用這些拍攝之複數張影像得到最終廣角影像的方法。
第7圖係用以說明本第1實施形態之數位相機1的合成處理之動作的流程圖。又，第8圖係用以說明本第1實施形態之數位相機1的合成處理之動作的示意圖。首先，CPU11取得全景影像製作用的影像(步驟S60)，並判別該影像在攝影時的狀態(步驟S62)。在該影像攝影時的狀態是狀態#1的情況，對該影像進行用以製作全景影像#1的合成處理(步驟S64)。
然後，判斷是否全景影像合成已結束(步驟S68)，若未結束，回到步驟S60。以下，如第8A圖所示，以部分重複的方式(例如使用α混合)將在狀態#1所拍攝之複數張影像FR1~FR6合成，而製作全景影像#1。
另一方面，在所取得之全景影像製作用的影像是在狀態#3所拍攝之影像的情況，對該影像進行用以製作全景影像#2的合成處理(步驟S66)。然後，判斷是否全景合成已結束(步驟S68)，若未結束，回到步驟S60。以下，如第8B圖所示，以部分重複的方式(例如使用α混合)將在狀態#3所拍攝之複數張影像FL1~FL6合成，而製作全景影像#2。
接著，在全景合成已結束的情況(在步驟S68為是)，如第8C圖所示，以部分重複的方式(例如使用α混合)將該全景影像#1之下側的既定區域與全景影像#2之上側的既定區域合成，而製作一張廣角影像(步驟S70)。
此外，在上述的第1實施形態，若預先從鍵輸入部16指定廣角影像的攝像範圍，亦可作成產生根據所指定之攝像範圍之尺寸的全景影像。又，亦可作成在影像處理部8比較應合成之全景影像彼此的攝像範圍，並將其他的全景影像的攝像範圍對準攝像範圍比較小的全景影像後合成，藉此，產生最後的廣角影像。
依據上述之第1實施形態，可在不進行透鏡更換之下容易且高效率地得到產生廣角影像所需的影像。 B.第2實施形態
其次，說明本發明之第2實施形態。
在本第2實施形態，其特徵為：作為相機要因將移動量、方位感測器或加速度感測器等的資訊，作為使用者要因將移動方向指示操作、快門鍵等之鍵操作、使用者的姿勢、聲音等用作觸發信號，檢測出在全景攝影的情況使用者移動數位相機1時之從狀態#1往狀態#2、從狀態#2往狀態#3之移動方向的變化。
此外，因為本第2實施形態之數位相機1的構成係與第1圖一樣，所以省略說明。又，因為全景攝影模式的主程序係與第5圖一樣、合成處理係與第7圖一樣，所以省略說明。
第9圖係用以說明本第2實施形態之數位相機1的連拍處理之動作的流程圖。又，第10圖係用以說明本第2實施形態之數位相機1的連拍處理之動作的示意圖。
在本第2實施形態，為了伴隨觸發信號檢測，判別現在數位相機1是否處於狀態#1、#2、#3之任一種狀態，準備每次檢測出觸發信號就反轉的旗標、與每次檢測出觸發信號就增加1之狀態#N(係數)。旗標係起始值設為「0」，並每次檢測出觸發信號就反轉。又，狀態#N係起始值設為「1」，且係表示現在數位相機1是否處於狀態#1、#2、#3任一狀態。狀態#N為，在迄至檢測出第1個觸發信號以前，成為「1」，表示狀態#1，檢測出觸發信號時，變成「2」，表示狀態#2。然後，檢測出下一個觸發信號時，變成「3」，表示狀態#3。
首先，CPU11進行前一張攝像影像與現在之攝像影像的位置對準(步驟S80)，再判斷是否檢測出觸發信號(步驟S82)。在未檢測出觸發信號的情況，如第10圖所示，未從狀態#1移往狀態#2，即，判斷是處在移動於水平方向(從左端往右方向)之狀態#1時，判斷是否旗標是「1」(步驟S88)。在此情況，因為尚未檢測出觸發信號，所以旗標是「0」，狀態#N是「1」。
而且，因為旗標是「0」(在步驟S88為否)，所以保存所拍攝之影像，作為狀態#N(=1)之全景影像製作用的影像(步驟S90)。然後，結束該處理，並回到第5圖所示的主程序。以下，迄至檢測出觸發信號以前，重複步驟S90，並持續保存所拍攝之影像，作為狀態#N(=1)之全景影像製作用的影像。
接著，如第10圖所示，在從狀態#1移往狀態#2時，例如，作為相機要因，根據移動量、或方位感測器的資訊，作為使用者要因，根據出移動方向、快門鍵等之鍵操作、使用者的姿勢、聲音等，檢測出數位相機1到達狀態#1之終端的情況，此等被檢測出作為觸發信號(在步驟S82為是)。檢測出觸發信號時，使旗標反轉(步驟S84)，並將狀態#N設為N+1(步驟S86)。在此情況，旗標變成「1」，而狀態#N成為「2」。
接著，判斷是否旗標是「1」(步驟S86)。在此情況，因為旗標是「1」，所以不將攝像影像保存為全景影像製作用的影像，並結束該處理(步驟S92)，回到第5圖所示的主程序。以下，迄至檢測出下一觸發信號以前(迄至數位相機1的移動方向成為狀態#3以前)，重複不保存攝像影像，結束該處理，並回到第5圖所示之主程序的動作。因此，在狀態#2所拍攝之影像不會被保存。
接著，如第10圖所示，在從狀態#2移往狀態#3時，例如，作為相機要因，根據移動量、或方位感測器的資訊，作為使用者要因，根據出移動方向、快門鍵等之鍵操作、使用者的姿勢、聲音等，檢測出數位相機1到達狀態#2之終端的情況(檢測出往既定方向之連拍之結束的情況)，此等被檢測出作為觸發信號(在步驟S82為是)。檢測出觸發信號時，使旗標反轉(步驟S84)，並將狀態#N設為N+1(步驟S86)。在此情況，旗標變成「0」，而狀態#N成為「3」。
接著，判斷是否旗標是「1」(步驟S86)。在此情況，因為旗標是「0」，所以保存攝像影像，作為狀態#N(=3)全景影像製作用的影像(步驟S90)。然後，結束該處理，並回到第5圖所示的主程序。以下，迄至檢測出下一觸發信號以前，重複步驟S90，而持續保存所拍攝之影像，作為狀態#N(=3)之全景影像製作用的影像。
上述之動作的結果，可得到使用者在使數位相機1從左端向右方向移動之狀態#1所拍攝的複數張影像、與在使數位相機1從右下向左方向移動之狀態#3所拍攝的複數張影像。
接著，以與上述之第1實施形態相同的方法(參照第7圖)，對在狀態#1所拍攝之複數張影像進行合成，而製作全景影像#1，對在狀態#3所拍攝之複數張影像進行合成，而製作全景影像#2，進而，以部分重複(例如使用α混合)的方式對全景影像#1之下側的既定區域與全景影像#2之上側的既定區域進行合成，而製作1張廣角影像。
依據上述之第2實施形態，在不必更換透鏡之下，就可容易且高效率地得到產生廣角影像所需的影像。 C.第3實施形態
其次，說明本發明之第3實施形態。
在上述之第1、第2實施形態，使用者為了拍攝得到廣角之合成影像所需的全部影像，如第3圖之箭號所示，以相對於所要的景色使像角之長度方向成為縱向的方式將數位相機1擺成縱向，並在左上按快門SW(半按→全按)，首先，移動於水平方向(從左端往右方向)(狀態#1)，在既定位置移動於垂直方向(下方向)(狀態#2)，進而，在別的既定位置移動於水平方向(左方向)(狀態#3)。可是，對使用者而言，難得知如何移動數位相機1才好，或者是否確實得到所需的影像。
因此，在本第3實施形態，在全景攝像模式，藉使用者按快門SW時，將表示應以數位相機1拍攝之區域的攝影框、或表示可朝向哪個方向移動的移動方向顯示於影像顯示部15，藉此，引導使用者。又，在全景攝像模式中，將現在成像於數位相機1之CCD5的影像作為預覽影像(低解析度)直接顯示於影像顯示部15，而且將使用預覽影像所合成的合成影像呈半透明(透過率50%)地顯示於影像顯示部15。
因為，依此方式，作成在全景攝像模式中，將表示下一應拍攝之攝像區域的攝影框、或表示可朝向哪個方向移動的移動方向、及對已拍攝之影像所合成的縮小影像顯示於影像顯示部15，所以使用者可易於識別可使數位相機1朝向哪個方向移動。
此外，因為本第3實施形態之數位相機1的構成係與第1圖一樣，所以省略說明。又，因為全景攝像模式的主程序係與第5圖一樣，合成處理係與第7圖一樣，所以省略說明。
第11圖係用以說明本第3實施形態之數位相機1的連拍處理之動作的流程圖。又，第12圖係用以說明本第3實施形態之數位相機1的連拍處理之動作的示意圖。
首先，CPU11進行前一張攝像影像與現在之攝像影像的位置對準(步驟S100)，再判斷現在之狀態是否為狀態#1、#2、#3任一(步驟S102)。然後，在使用者使數位相機1從左端往右方向移動之狀態#1的情況(步驟S102的狀態#1)，如第12圖所示，顯示攝影框FR1、移動方向M1(步驟S104)。然後，保存該現在的攝像影像，作為在狀態#1之全景影像製作用的影像(步驟S106)，再從迄至該時間點為止所保存之攝像影像的縮小影像製作簡易合成影像IMG，並以半透明(透過率50%)顯示(步驟S108)。
接著，判斷是否數位相機1已到達既定位置P1(在此情況，在狀態#1之終點位置：參照第12圖)(步驟S110)。而且，在未到達既定位置P1的情況(在步驟S110為否)，不變更現在之狀態#1，並結束該處理，回到主程序。
以下，迄至數位相機1到達既定位置P1以前，重複步驟S106及步驟S108，每次保存所拍攝之影像，作為在狀態#1之全景影像製作用的影像，並以半透明(透過率50%)持續顯示該時間點的合成影像。而且，數位相機1到達既定位置P1時(在步驟S110為是)，因為從狀態#1移往狀態#2，所以將現在之狀態變更成狀態#2(步驟S112)。
接著，當現在之狀態移至使數位相機1從狀態#1之終點位置向下方向移動之狀態#2(步驟S102的狀態#2)時，如第12圖所示，顯示攝影框FR2、移動方向M2(步驟S114)。然後，不將攝像影像保存為全景影像製作用的影像，並移至步驟S118(步驟S116)，判斷是否數位相機1已到達既定位置P2(在此情況，在狀態#2之終點位置：參照第12圖)(步驟S118)。而且，在未到達既定位置P2的情況(在步驟S118為否)，不變更現在之狀態#2，並結束該處理，回到第5圖所示的主程序。
以下，迄至數位相機1到達既定位置P2以前，不保存攝像影像，並仍然維持繼續拍攝，而數位相機1到達既定位置P2時(在步驟S118為是)，因為從狀態#2移往狀態#3，所以將現在之狀態變更成狀態#3(步驟S120)。
接著，現在之狀態使數位相機1從狀態#2移至往左方向移動之狀態#3(步驟S102的狀態#3)時，如第12圖所示，顯示攝影框FR3、移動方向M3(步驟S122)。然後，保存所拍攝之影像，作為在狀態#3的全景影像製作用的影像(步驟S124)，再從迄至該時間點為止所保存之攝像影像的縮小影像製作簡易合成影像，並以半透明(透過率50%)顯示(步驟S126)。
以下，迄至數位相機1到達既定位置P3(終點)以前，重複步驟S124及步驟S126，每次保存所拍攝之影像，作為在狀態#3之全景影像製作用的影像，並以半透明(透過率50%)持續顯示該時間點的合成影像。而且，數位相機1到達既定位置P1時(在步驟S128為是)，結束連拍(步驟S130)。
上述之動作的結果，可得到在使用者使數位相機1從左端向右方向移動之狀態#1所拍攝的複數張影像、與在使數位相機1從右下向左方向移動之狀態#3所拍攝的複數張影像。
接著，以和上述之第1、第2實施形態相同的方法(參照第7圖)對在狀態#1所拍攝之複數張影像進行合成，製作全景影像#1，對在狀態#3所拍攝之複數張影像進行合成，製作全景影像#2，進而，以部分重複(例如使用α混合)的方式對全景影像#1之下側的既定區域與全景影像#2之上側的既定區域進行合成，而製作1張廣角影像。
此外，在上述的第3實施形態，在顯示於影像顯示部15的攝影框FR1~FR3，如第12圖所示，設置裕度(margin)MG，即設為比實際所拍攝之攝像範圍稍大的攝影框較佳。藉由設置裕度MG，在移動數位相機1之範圍產生裕度，而可減輕移動數位相機1之使用者的壓力。
又，在上述的第3實施形態，作成根據是否已到達既定位置來判斷從狀態#1往狀態#2、從狀態#2往狀態#3之移動方向的變化，但是未限定如此，亦可作成與上述之第2實施形態一樣，作為相機要因，將移動量、方位感測器或加速度感測器等的資訊，作為使用者要因，將移動方向指示操作、快門鍵等之鍵操作、使用者的姿勢、聲音等用作觸發信號，進行判斷。
依據上述之第3實施形態，因為作成即時將合成影像顯示於影像顯示部15，而且顯示應使數位相機1移動之攝影框或移動方向，所以使用者只要一面看攝影框或移動方向，一面移動數位相機1即可，所以可容易且高效率地拍攝用以產生在一次之攝像無法得到之廣角影像所需的複數張影像，而易於產生廣角影像。
此外，在上述之第1~第3實施形態，在全景攝影時，使數位相機1從左往右、從上往下及從右往左移動，但是未限定如此，例如第13A圖所示，亦可作成在往一方向移動之期間拍攝複數張影像，並對那些影像作合成，而產生一張廣角影像。或者，如第13B圖所示，亦可作成使數位相機1從左往右、從上往下、從右往左、從上往下以及從左往右般重複橫向之移動3次以上，亦可作成對3張以上的全景影像作合成，而產生廣角影像。
又，在上述的第3實施形態，作成顯示攝影範圍的攝影框或移動方向，但是未限定如此，如第14圖所示，亦可作成塗滿對最後之廣角影像的整體框20所拍攝的部分30。
以上，說明了本發明之幾個實施形態，但是本發明未限定如此，而是包含在申請專利範圍所記載的發明與其同等之範圍。
1‧‧‧數位相機
2‧‧‧攝像透鏡
3‧‧‧透鏡驅動部
4‧‧‧光圈兼用快門
5‧‧‧CCD
6‧‧‧TG
7‧‧‧單元電路
8‧‧‧影像處理部
11‧‧‧CPU
12‧‧‧DRAM
13‧‧‧記憶體
14‧‧‧快閃記憶體
15‧‧‧影像顯示部
16‧‧‧鍵輸入部
17‧‧‧卡I/F
18‧‧‧記憶卡
第1圖係表示本發明之第1實施形態的數位相機之構成的方塊圖。
第2圖係用以說明一般攝像模式的示意圖。
第3圖係用以說明本第1實施形態之數位相機1之全景攝像模式的示意圖。
第4圖係用以說明本第1實施形態的數位相機1之在全景攝像模式之數位相機1的動作(依使用者移動方法)的示意圖。
第5圖係用以說明本第1實施形態之數位相機1之動作的流程圖。
第6圖係用以說明本第1實施形態之數位相機1的連拍處理之動作的流程圖。
第7圖係用以說明本第1實施形態之數位相機1的合成處理之動作的流程圖。
第8A圖至第8C圖係用以說明本第1實施形態之數位相機1的合成處理之動作的示意圖。
第9圖係用以說明本第2實施形態之數位相機1的連拍處理之動作的流程圖。
第10圖係用以說明本第2實施形態之數位相機1的連拍處理之動作的示意圖。
第11圖係用以說明本第3實施形態之數位相機1的連拍處理之動作的流程圖。
第12圖係用以說明本第3實施形態之數位相機1的連拍處理之動作的示意圖。
第13A圖、第13B圖係表示全景攝影時之數位相機1的移動方法之其他的例子的示意圖。
第14圖係表示表示攝像範圍之攝影框或移動方向之其他的顯示例的示意圖。

权利要求:
Claims (15)
[1] 一種影像處理裝置，其特徵為具有：取得手段，係取得在一方向上呈長形的複數張全景影像；及廣角影像產生手段，係在與該一方向正交的方向對藉該取得手段所取得之該複數張全景影像彼此進行合成，而產生一張廣角影像。
[2] 如申請專利範圍第1項之影像處理裝置，其中更具有：攝像手段；及全景影像產生手段，係對藉該攝像手段所依序拍攝之複數張影像進行合成，而產生全景影像；該取得手段係取得藉該全景影像產生手段所產生之複數張全景影像。
[3] 如申請專利範圍第2項之影像處理裝置，其中更具有檢測出既定觸發信號的檢測手段；該全景影像產生手段係在藉該檢測手段檢測出既定觸發信號時，至檢測出該觸發信號對藉該攝像手段所依序拍攝之複數張影像進行合成而產生全景影像；該廣角影像產生手段係對藉該全景影像產生手段所產生之複數張全景影像彼此進行合成，而產生該一張廣角影像。
[4] 如申請專利範圍第3項之影像處理裝置，其中更具有：記憶手段，係依序記憶藉該攝像手段所依序拍攝之複數張影像；及記憶控制手段，係控制成藉該檢測手段檢測出既定觸發信號時，該記憶手段記憶該複數張影像；該全景影像產生手段係從該記憶手段所記憶之複數張影像，產生該全景影像。
[5] 如申請專利範圍第3項之影像處理裝置，其中該檢測手段係檢測出移動量、方位感測器之資訊、或移動方向的變化、或者依使用者之既定指示操作、或依使用者之聲音的指示、或依使用者之動作的指示，作為該既定觸發信號。
[6] 如申請專利範圍第4項之影像處理裝置，其中該記憶控制手段係禁止該記憶手段記憶在藉該檢測手段檢測出既定觸發信號後所拍攝的影像，並在禁止該記憶期間，當藉該檢測手段檢測出別的既定觸發信號時，許可記憶所拍攝的影像。
[7] 如申請專利範圍第2項之影像處理裝置，其中該全景影像產生手段係從該攝像手段的攝像區域邊在既定方向移動而邊依序拍攝之複數張影像，產生該複數張全景影像。
[8] 如申請專利範圍第2項之影像處理裝置，其中該全景影像產生手段係從該攝像手段的攝像區域邊在既定方向移動複數次而邊依序拍攝之複數張影像，產生該複數張全景影像。
[9] 如申請專利範圍第8項之影像處理裝置，其中該全景影像產生手段係從在該攝像手段的攝像區域朝一方向移動的過程所依序拍攝之複數張影像、與在和該一方向相反方向移動的過程依序拍攝之複數張影像的各影像，產生該複數張全景影像。
[10] 如申請專利範圍第9項之影像處理裝置，其中該全景影像產生手段為，在該攝像手段的攝像區域朝一方向移動的過程，以該攝像手段拍攝既定時間、或既定張數、或既定範圍份量的影像時，從那些影像產生一張全景影像；在該攝像手段的攝像區域朝和該一方向相反方向移動的過程，以該攝像手段拍攝既定時間、或既定張數、或既定範圍份量的影像時，從那些影像產生一張全景影像。
[11] 如申請專利範圍第2項之影像處理裝置，其中更具有預先指定廣角影像之攝像範圍的指定手段；該全景影像產生手段係根據藉該指定手段所指定之攝像範圍，產生該全景影像。
[12] 如申請專利範圍第1項之影像處理裝置，其中更具有比較應合成之全景影像彼此之攝像範圍的比較手段；該廣角影像產生手段係根據該比較手段的比較結果，使較大之攝像範圍配合較小的攝像範圍，對該全景影像彼此進行合成，藉此，產生該一張廣角影像。
[13] 如申請專利範圍第1項之影像處理裝置，其中該廣角影像產生手段係將藉該取得手段所取得之該複數張全景影像之上側的既定區域與下側的既定區域彼此進行合成，而產生該一張廣角影像。
[14] 一種影像處理方法，其特徵為包含：取得步驟，係取得在一方向上呈長形的複數張全景影像；及廣角影像產生步驟，係在與該一方向正交的方向對在該取得步驟所取得之該複數張全景影像彼此進行合成，而產生一張廣角影像。
[15] 一種記錄媒體，係進行影像處理之影像處理裝置之電腦可讀取的記錄媒體，該記錄媒體係記錄使該電腦執行如下之功能的程式，取得功能，係取得在一方向上呈長形的複數張全景影像；及廣角影像產生功能，係在與該一方向正交的方向，對以該取得功能所取得之該複數張全景影像彼此進行合成，而產生一張廣角影像。

类似技术:

公开号 | 公开日 | 专利标题

TWI514847B|2015-12-21|影像處理裝置、影像處理方法、及記錄媒體

TWI459126B|2014-11-01|可產生廣角影像之影像處理裝置、影像處理方法及記錄媒體

US8155432B2|2012-04-10|Photographing apparatus

JP5054583B2|2012-10-24|撮像装置

JP4644883B2|2011-03-09|撮像装置

JP4985808B2|2012-07-25|撮像装置、及びプログラム

JP2006162991A|2006-06-22|立体画像撮影装置

JP2008252508A|2008-10-16|撮像装置及び撮影方法

JP2007263926A|2007-10-11|測距装置及び方法

JP2007215091A|2007-08-23|撮像装置及びそのプログラム

KR101433121B1|2014-08-25|소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치

JP2010141609A|2010-06-24|撮像装置

JP2007225897A|2007-09-06|合焦位置決定装置及び方法

KR20110055241A|2011-05-25|손 떨림 보정 모듈을 구비하는 디지털 촬영 장치 및 이의 제어 방법

JP4767904B2|2011-09-07|撮像装置及び撮像方法

JP2011109693A|2011-06-02|撮像装置

JP5641352B2|2014-12-17|画像処理装置、画像処理方法、及びプログラム

JP2009210832A|2009-09-17|撮像装置

JP2007226141A|2007-09-06|撮影装置及び方法

JP5370662B2|2013-12-18|撮像装置

JP5648563B2|2015-01-07|画像処理装置、画像処理方法、及びプログラム

JP4823964B2|2011-11-24|撮像装置及び撮像方法

JP4756005B2|2011-08-24|撮像装置及び撮像方法

JP2010028250A|2010-02-04|カメラ装置、及びその画像表示方法と画像表示プログラム

JP2009089036A|2009-04-23|機器および画像処理方法

同族专利:

公开号 | 公开日

KR20120114177A|2012-10-16|

US9007429B2|2015-04-14|

KR101391042B1|2014-04-30|

US20120257006A1|2012-10-11|

CN102739962A|2012-10-17|

CN102739962B|2016-08-24|

TWI514847B|2015-12-21|

引用文献:

公开号 | 申请日 | 公开日 | 申请人 | 专利标题

CN111935408A|2020-09-02|2020-11-13|Oppo广东移动通信有限公司|全景图像拍摄方法及系统、电子设备及可读存储介质|US5670935A|1993-02-26|1997-09-23|Donnelly Corporation|Rearview vision system for vehicle including panoramic view|

US6466254B1|1997-05-08|2002-10-15|Be Here Corporation|Method and apparatus for electronically distributing motion panoramic images|

JP2004191897A|2002-12-09|2004-07-08|Yoshiaki Kimura|レンズアダプター|

JP2004228711A|2003-01-20|2004-08-12|Sony Corp|監視装置及び方法、プログラム並びに監視システム|

US20040189849A1|2003-03-31|2004-09-30|Hofer Gregory V.|Panoramic sequence guide|

JP2005027142A|2003-07-04|2005-01-27|Minolta Co Ltd|カメラ用外部装置およびカメラ|

JP2005057548A|2003-08-05|2005-03-03|Nisca Corp|携帯端末装置|

JP4437677B2|2004-03-01|2010-03-24|三菱電機株式会社|景観表示装置|

JP2006099497A|2004-09-30|2006-04-13|Seiko Epson Corp|パノラマ画像の合成|

JP2006197312A|2005-01-14|2006-07-27|Funai Electric Co Ltd|ディジタルカメラ|

JP2007081473A|2005-09-09|2007-03-29|Eastman Kodak Co|複数光学系を有する撮像装置|

US7912319B2|2006-08-28|2011-03-22|Avago Technologies General Ip Pte. Ltd.|Systems and methods for panoramic image construction using small sensor array|

JP4947060B2|2007-01-18|2012-06-06|富士通株式会社|画像合成装置、画像合成方法、プログラム|

JP4980779B2|2007-04-13|2012-07-18|富士フイルム株式会社|撮影装置、方法およびプログラム|

JP4818987B2|2007-05-21|2011-11-16|オリンパスイメージング株式会社|撮像装置、表示方法、及びプログラム|

US8717412B2|2007-07-18|2014-05-06|Samsung Electronics Co., Ltd.|Panoramic image production|

JP4544332B2|2008-04-07|2010-09-15|ソニー株式会社|画像処理装置、画像処理方法、プログラム|

JP5338174B2|2008-07-28|2013-11-13|富士通株式会社|パノラマ撮影装置及び方法、パノラマ撮影装置を搭載したカメラユニット|

JP2010124088A|2008-11-18|2010-06-03|Panasonic Corp|撮像装置|

JP4760918B2|2009-01-23|2011-08-31|カシオ計算機株式会社|撮像装置、被写体追従方法、及びプログラム|

US20100265313A1|2009-04-17|2010-10-21|Sony Corporation|In-camera generation of high quality composite panoramic images|WO2013003485A1|2011-06-28|2013-01-03|Inview Technology Corporation|Image sequence reconstruction based on overlapping measurement subsets|

JP5522545B2|2011-10-18|2014-06-18|カシオ計算機株式会社|撮像装置、撮像方法、及びプログラム|

KR102023179B1|2013-02-21|2019-09-20|삼성전자주식회사|듀얼 카메라를 포함하는 전자장치에서 듀얼 리코딩 촬영을 위한 방법 및 장치|

KR20150033162A|2013-09-23|2015-04-01|삼성전자주식회사|컴포지터, 이를 포함하는 시스템온칩 및 이의 구동 방법|

RU2626551C1|2016-06-07|2017-07-28|Общество с ограниченной ответственностью "СИАМС"|Способ формирования панорамных изображений из видеопотока кадров в режиме реального времени|

CN105959570B|2016-06-27|2020-12-18|联想有限公司|一种拍摄方法和电子设备|

RU2647645C1|2016-12-29|2018-03-16|Общество с ограниченной ответственностью "СИАМС"|Способ устранения швов при создании панорамных изображений из видеопотока кадров в режиме реального времени|

CN111373300A|2017-09-25|2020-07-03|深圳传音通讯有限公司|一种增加拍摄画幅的拍摄系统及其控制方法|

CN113115023A|2020-01-09|2021-07-13|百度在线网络技术（北京）有限公司|全景场景切换方法、装置及设备|

法律状态:

优先权:

申请号 | 申请日 | 专利标题

JP2011084376A|JP5641352B2|2011-04-06|2011-04-06|画像処理装置、画像処理方法、及びプログラム|

JP2011084380A|JP5648563B2|2011-04-06|2011-04-06|画像処理装置、画像処理方法、及びプログラム|

[返回顶部]